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摘 要 算法 拒绝 意 指 尽管 算法 通常 能 比 人 类 做 出 更 准确 的 决策 ， 但 人 们 依然 更 偏好 人 类 决 
策 的 现象 。 算法 拒绝 的 三 维 动机 理论 归纳 了 算法 主体 怀疑 道德 地 位 缺失 和 人 类 特性 淫 没 这 
三 个 主要 原因 ， 分 别 对 应 信任 、 责 任 和 掌控 三 种 心理 动机 ,并 对 应 改变 算法 拒绝 的 三 种 可 行 
方案 : 提高 人 类 对 算法 的 信任 度 ， 强 化 算法 的 主体 责任 , 探索 个 性 化 算法 设计 以 突显 人 对 算 
法 决策 的 控制 力 。 未 来 研究 可 进一步 以 更 社会 性 的 视角 探 完 算法 拒绝 的 发 生 边界 和 其 他 可 能 
动机 。 
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决策 在 生活 中 普遍 存在 。 传 统 上 ， 决 策 过 程 的 主体 是 人 类 自身 〈 当 事 人 或 他 人 )。 但 由 
于 人 类 决策 能 力 存 在 局 限 〈 如 受 决 策 者 经 验 和 情绪 影响 )， 容 易 导致 决策 失误 ， 造 成 不 良 决 
策 后 果 。 随 着 算法 技术 的 发 展 与 普及 , 为 了 克服 人 类 决策 的 局 限 性 ， 基 于 信息 整合 和 理性 计 
算 原则 的 算法 决策 被 广泛 引入 工作 甚至 日 常生 活 中 。 算 法 决策 (algorithmic decision making) 
是 一 系列 相关 概念 的 总 称 ， 包 含 增强 决策 、 决 策 辅 助 、 决 策 支持 系统 、 专 家 系统 、 决 策 公式 
和 计算 机 辅助 等 (Burton et al., 2020)， 新 近 研 究 也 将 算法 决策 概念 扩展 于 机 器 决策 、 机 器 人 


决策 和 人 工 智 能 决策 等 (Malle et al., 2015)。 相 较 于 人 类 决策 ， 算 法 决策 上 共有 快速 (Bonnefon et 


al., 2016)、 准 确 (Donnelly, 2017; Lohr, 2016)、 客 观 (Andrews et al., 2006)、 兽 适 (Esteva et al., 


2017) 和 低 耗 (Common Cents Lab, 2017) 等 优点 。 和 凭借 这 些 特点 ， 算 法 决策 在 社会 生活 的 各 领 
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域 ， 包 括 医 疗 (Biro et al. 2021; van den Berg et al., 2017)、 经 济 (Harvey et al., 2017; Kaya et al., 


2017)、 司 法 (Angwin et al., 2016)、 交通 (Badue et al., 2020; Fournier, 2016). 军事 (Horowitz, 2016; 


Shin et al., 2019) 以 及 日 常生 活 (Roberts, 2017) 中 的 应 用 都 日 益 增 多 。 

物理 功能 的 算法 技术 早已 将 人 类 从 许多 费时 费力 的 活动 中 解放 出 来 (Parasuraman & 
Riley, 1997); 判断 、 规 划 和 创造 性 思维 等 认 知 功能 的 算法 决策 技术 也 越 来 越 普 及 (Chouard， 
2016; Luo et al., 2019; Oliveira, 2017)。 可 以 说 , 算法 技术 的 进步 给 社会 带 来 了 革命 性 的 变化 。 
然而 ， 算 法 决策 的 诸多 优势 似乎 并 没有 让 人 们 喜欢 上 它 。 哲 学 家 Bostrom(2014) 认 为 机 器 代 
表 人 类 做 决定 可 能 会 导致 灾难 ，Elon Musk 称 自动 机 器 的 崛起 是 人 类 “最 大 的 生存 威胁 ” 
(McFarland, 2014)。 普 通 民众 也 更 偏好 人 类 决策 而 非 算法 决策 。 研 究 表明 ， 算 法 通常 能 比 人 
类 更 准确 地 完成 决策 任务 ， 然 而 ， 人 们 还 是 会 选择 人 类 决策 或 遵循 人 类 建议 做 出 决策 。 
Dietvorst 等 人 (2015) 将 这 种 人 们 偏好 人 类 决策 而 回避 更 准确 的 算法 决策 的 现象 称 为 算法 拒绝 
(algorithm aversion)。 算 法 拒绝 并 非 只 发 生 于 人 们 了 解 到 算法 决策 可 能 出 错 后 ， 更 多 发 生 于 
人 们 并 不 了 解 算法 表现 之 前 , 因此 算法 拒绝 实际 上 就 是 对 算法 的 偏见 评估 , 即 对 算法 的 负 
Mia 行为 和 态度 (Jussupow et al., 2020). 
一 算法 拒绝 表现 于 知 、 情 、 行 诸 方面 ， 即 人 们 在 认 知 上 不 认同 算法 决策 ,在 情感 上 不 喜欢 
算法 决策 ， 进 而 外 显 在 行为 上 拒绝 算法 决策 。 首先 是 认 知 拒绝 ,主要 体现 在 人 们 对 算法 能 力 
的 不 信任 (Prahl & Van Swol, 2017)。 如 尽管 在 司法 体系 中 引入 算法 决策 可 以 帮助 对 抗 法 律 体 
系 中 人 类 固有 的 主观 性 和 一 些 潜 在 错误 (Andrew et al., 2009)， 但 在 皮 尤 民意 调查 中 ，56% 的 
受 访 者 依然 认为 使 用 算法 进行 假释 决定 的 风险 评估 是 不 可 接受 的 (Smith, 2018)。 在 医疗 上 ， 
病人 也 会 更 严 历 地 评判 从 算法 而 不 是 从 同僚 那里 寻求 建议 的 医生 (Shafferet al.,2013)。 其 次 ， 
情感 拒绝 体现 在 人 们 对 算法 决策 的 使 用 或 其 决策 结果 产生 负面 情绪 (Lee, 2018; Leyer & 
Schneider, 2019) 甚 至 道德 责备 (Voiklis etal., 2016)。 如 让 人 们 评估 完全 相同 的 艺术 作品 ， 人 们 
会 更 喜欢 由 人 类 而 非 算法 创作 的 艺术 作品 (Jago,2019)。 当 人 类 法 官 决策 或 算法 司法 决策 出 现 
错误 时 ， 人 们 对 算法 决策 错误 有 更 多 的 负面 情感 反应 ， 也 更 可 能 在 法 庭 失败 时 采取 法 外 措施 
来 干扰 司法 秩序 (Ireland, 2020)。 再 次 是 行为 拒绝 ， 即 相 比 人 类 决策 ， 人 们 会 更 少 的 选择 算法 
决策 或 对 其 利用 程度 更 低 ， 甚 至 以 消极 行为 反抗 算法 决策 的 结果 (Filiz et al., 2021)。 如 在 股 
市 决策 实验 中 ， 人 们 更 相信 人 类 专家 给 出 的 相同 预测 ， 也 更 愿意 接受 人 类 而 非 算法 建议 
(Önkal et al., 2009)。 在 医疗 中 ， 与 人 类 提供 的 医疗 服务 相 比 ， 消 费 者 更 不 愿意 使 用 人 工 智 能 
提供 的 医疗 服务 ， 并 且 愿 意 为 此 支付 的 费用 也 更 少 (Longoni etal., 2019). 

为 什么 人 类 会 表现 出 在 各 个 心理 层面 上 对 算法 的 拒绝 ? 我 们 认为 , 面 对 算 法 决策 这 种 新 
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的 决策 形式 ， 人 类 大 略 会 问 这 样 三 个 递 进 的 问题 : 第 一 ， 算 法 是 否 真 的 可 以 以 及 有 能 力 进行 
决策 ? 对 这 一 问题 的 回答 往往 是 负面 的 , 人 类 通常 情况 下 怀疑 算法 的 能 力 , 对 算法 产生 怀疑 
和 不 信任 ， 因 此 造成 算法 拒绝 。 第 二 ， 哪 怕 算 法 可 以 以 及 有 能 力 进 行 决 策 ， 那 么 我 们 是 否 真 
的 需要 用 算法 进行 决策 , 或 者 说 算法 决策 对 于 人 类 个 体 有 何 益处 吗 ? 当然 , 对 这 一 问题 的 回 
答 通 常 也 是 负面 的 ， 因为 人 类 在 决策 时 有 推脱 责任 的 倾向 ,而 算法 作为 决策 主体 ， 其 道德 主 
体 地 位 和 承担 责任 的 能 力 缺 失 ， 导 致 人 类 采用 算法 决策 无 益 ， 从 而 引起 算法 拒绝 。 第 三 ， 假 
使 算法 有 能 力 且 人 类 信任 其 进行 决策 , 其 也 能 进行 道德 责任 的 分 担 , 这 种 决策 模式 对 人 类 自 
喘 真 的 有 良好 影响 吗 ? 实际 上 对 于 这 个 问题 的 回答 通常 也 是 负面 的 , 因为 人 类 会 因 算法 决策 
而 缺失 掌控 ,造成 人 类 对 于 自己 个 性 特征 淹没 而 人 将 非 人 的 感受 ,以 此 最 终 拒绝 算法 。 为 此 
我 们 提出 算法 拒绝 的 三 维 动机 理论 以 说 明 算法 拒绝 的 成 因 , 并 在 此 基础 上 探索 其 改变 ( 见 表 


: 1): 
表 1 算法 拒绝 的 三 维 动机 理论 
算法 决策 的 疑问 算法 拒绝 的 原因 ”算法 拒绝 的 动机 ”算法 改变 的 方式 
一 算法 是 否 可 以 决策 ? 算法 主体 怀疑 。 信任 /怀疑 动机 “提高 对 算法 的 信任 度 
> 是 否 需要 用 算法 决策 ? 道德 地 位 缺失 。 担 责 / 推 责 动机 。 强化 算法 的 主体 责任 
> 算法 决策 会 对 人 造成 何 种 影响 ? ”人 类 特性 洒 没 。 ”掌控 /失控 动机 。 探索 个 性 化 算法 设计 


r= 2 算法 拒绝 之 原因 

算法 决策 实际 上 是 一 个 人 机 交互 的 过 程 ， 造 成 算法 拒绝 的 原因 也 必 不 可 少 地 出 现在 人 、 
算法 以 及 算法 和 人 的 交互 中 。 但 究 其 深层 次 原因 ， 我 们 认为 是 三 点 ， 即 算法 主体 怀疑 、 道德 
地 位 缺失 以 及 人 类 特性 淹没 。 这 分 别 表现 为 人 们 倾向 于 认为 算法 作为 新 生 事物 而 对 其 产生 能 
力 怀 疑 、 人 们 倾向 于 认为 算法 无 法 作为 道德 主体 而 承担 责任 、 以 及 人 们 倾向 于 认为 算法 普遍 
化 的 决策 倾向 减少 了 人 类 独特 性 。 这 回答 了 人 类 知觉 算法 决策 时 “能 不 能 ”( 不 了 解 算 法 决 
策 也 不 觉得 算法 有 能 力 决 策 )、“ 用 不 用 ”( 算 法 决策 之 后 无 法 归 责 也 无 用 ) 以 及 “好 不 好 ” 
(算法 决策 反而 消解 个 体 作为 人 的 独特 性 ) 的 间 题 ， 也 对 应 了 信任 / 杯 疑 、 担 责 / 推 责 、 掌 控 
/失控 这 三 种 动机 ， 


2.1 算法 主体 怀疑 

算法 决策 能 不 能 有 效 是 第 一 个 问题 , 实际 上 人 们 对 这 个 问题 的 回答 是 倾向 于 否定 的 , 表 
现 出 对 算法 的 怀疑 。 这 种 算法 主体 怀疑 的 第 一 个 原因 可 能 是 人 们 对 算法 并 不 熟悉 。 很 少 有 技 
术 在 引入 工作 场所 后 立即 被 接受 (Parasuraman & Riley, 1997)。 一 开始 人 们 并 不 了 解 新 技术 ， 
就 很 可 能 不 喜欢 或 不 信任 一 个 新 的 自动 化 系统 ,但 是 随 着 算法 决策 的 应 用 普及 或 人 们 与 其 接 
触 日 益 增 多 ， 人 们 会 对 算法 决策 越 来 越 了 解 ， 也 会 更 接受 算法 决策 。 这 种 现象 可 用 单纯 曝光 
效应 解释 。 一 旦 图 像 和 声音 等 的 外 部 刺激 信息 经 常 暴露 在 人 的 面前 ， 人 们 对 其 喜爱 程度 就 可 
能 提高 (Zajonc, 1968)。 例 如 , 大 多 数 人 已 经 习惯 了 来 自 气象 模型 而 不 是 来 自 邻 居 的 天 气 预 报 ， 
因为 气象 模型 几 十 年 来 一 直 被 广泛 使 用 ;相反 ,关于 时 尚 潮流 的 算法 建议 仍然 相对 较 新 ， 可 
能 会 面临 更 大 的 阻力 (Logg et al., 2019)。 日 本 人 在 日 常生 活 中 可 能 更 熟悉 机 器 人 ， 因 而 更 接 
受 机 器 道德 决策 (Komatsu, 2016)。Ireland(2020) 也 认为 ， 一 般 来 说 ， 随 着 人 们 越 来 越 习惯 于 算 
法 ， 在 司法 系统 中 ， 算 法 拒绝 的 现象 可 能 会 减弱 或 完全 消失 ， 算 法 可 能 会 变 得 司空 见 惯 ， 算 
法 的 错误 会 被 视 为 人 类 法 官 犯 下 的 错误 。 

两 种 因素 影响 人 们 对 算法 决策 的 熟悉 度 。 其 一 是 算法 本 身 的 透明 度 , 其 二 是 人 们 自身 的 
专业 度 。 首先 , 算法 决策 的 不 透明 可 能 是 阻碍 人 们 熟悉 算法 决策 的 原因 之 一 。 算法 决策 是 由 
黑箱 方法 产生 的 (Castelvecchi, 2016)， 人 们 并 不 了 解 其 内 部 工作 方式 (Kroll et al., 2017; 林 少 
(E, 唐 林 考 ,2020)， 统 计 预 测 背后 的 推理 对 于 没有 接受 过 统计 学 训练 的 人 来 说 可 能 是 不 可 及 
或 神秘 的 (Onkal et al.,2009)。 例 如 有 研究 发 现 ， 数 学 能 力 较 差 的 人 对 算法 决策 的 认同 程度 更 
低 (Logg et al., 2019)。 实 际 上 ， 算 法 决策 和 人 类 决策 都 是 不 透明 的 ， 但 人 们 以 为 可 以 通过 自 
省 (introspectiom) 的 方式 了 解 其 他 人 类 决策 的 心理 过 程 ， 这 种 耦合 效应 (Coupling effect) 使 人 们 
对 人 类 决策 的 不 透明 感知 较 低 , 却 放大 对 算法 决策 的 不 透明 感知 。 这 种 对 透明 度 的 感知 不 对 
称 会 削弱 人 们 理解 算法 决策 的 信心 , 使 人 们 在 客观 上 本 就 不 熟悉 算法 决策 的 情况 下 , 在 主观 
上 也 更 低估 自己 对 算法 决策 的 理解 , 却 因 人 类 决策 是 非 黑 箱 过 程 产生 的 错觉 而 高 估 自 己 对 人 
类 决策 的 理解 , 这 种 对 算法 决策 和 人 类 决策 的 透明 度 感 知 与 主观 理解 不 对 称 则 会 强化 算法 拒 
绝 (Cadario et al., 2021)。 因 此 关于 算法 是 如 何 执 行 的 解释 既 可 以 提高 人 们 对 算法 决策 的 客观 
理解 亦 可 以 提高 他 们 主观 上 对 算法 决策 理解 的 信心 ， 从 而 提高 算法 决策 利用 率 (Cadario et 
al., 2021; Yeomans et al., 2019)。 其 次 ， 对 应 用 领域 的 熟悉 度 与 专业 度 也 会 影响 人 们 对 算法 决 
策 的 接受 度 。 研究 发 现 ， 受过 金融 教育 的 人 更 善于 处 理财 务 信 息 ， 因 此 更 容易 接受 算法 建议 


(Lusardi & Mitchell, 2011)， 而 受 教 育 程度 较 低 的 人 则 更 少 意识 到 其 需要 建议 (Lee & Moray, 
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1992)。 投 次 知识 较 少 的 人 更 拒绝 算法 帮助 自己 投资 (Niszczota & Kaszás, 2020)。 但 也 有 研究 
发 现 ,对 自己 能 力 过 于 自信 的 个 体 也 可 能 排斥 算法 决策 (Soll & Mannes, 2011)。 例 如， 从 一 开 
去 在 某 些 决策 上 表现 得 比 人 类 更 好 时 ， 就 遭 到 了 专家 们 的 强烈 质疑 ， 
相关 领域 的 专家 们 不 愿 相信 线性 模型 可 以 超越 他 们 的 判断 ， 他 们 甚至 对 该 结论 持 敌 意 态 度 。 
在 预测 任务 中 , 专家 没有 意识 到 算法 建议 的 价值 , 对 算法 提供 给 他 们 的 信息 充 耳 不 闻 并 且 坚 
持 自己 最 初 的 判断 ， 但 不 接受 算法 建议 的 专家 的 预测 准确 率 甚 至 不 如 外 行人 (Logg et al., 
2019)。 这 些 研 究 结果 提示 ， 对 应 用 领域 的 熟悉 度 和 专业 度 与 算法 拒绝 间 可 能 存在 着 非 线性 
关系 , 过 弱 或 过 强 的 熟悉 度 和 专业 度 都 会 强化 算法 拒绝 , 未 来 的 研究 可 通过 比较 熟悉 度 和 专 
业 度 的 不 同 水 平 ， 进 一 步 考察 二 者 间 的 关系 。 
算法 主体 怀疑 的 第 二 个 原因 可 能 是 人 们 认为 算法 不 具有 良好 的 决策 能 力 。 人 们 通常 对 算 
法 的 专业 能 力 表示 怀疑 ， 认 为 算法 决策 的 表现 不 如 人 类 决策 (Dzindolet et al., 2002; Prahl & 
一 Van Swol, 2017)。 例 如 ， 人 们 不 愿 遵循 医疗 算法 建议 的 原因 是 他 们 不 相信 算法 具备 做 出 好 建 
= 议 的 专业 医学 能 力 (Promberger & Baron, 2006)， 即 使 是 让 人 们 评估 完全 一 样 的 艺术 作品 ， 人 
们 也 更 喜欢 被 告知 是 由 人 类 而 不 是 算法 创造 的 作品 (Jago,2019)。 这 表明 和 人们 的 确 对 算法 决策 
存在 一 种 其 专业 能 力 不 如 人 类 的 偏见 ,即使 在 算法 决策 与 人 类 决策 准确 度 相近 或 犯 同等 程度 
错误 时 ， 人 们 依然 更 偏好 人 类 决策 (Gogoll & Uhl, 2018)， 只 有 在 算法 具有 相对 于 人 类 的 明显 
优越 表现 时 ， 人 们 才 可 能 会 选择 算法 决策 (Bigman & Gray, 2018)。 甚 至 有 时 人 们 明知 算法 决 
策 的 表现 优 于 人 类 决策 ， 仍 不 会 选择 算法 决策 (Grove & Lloyd, 2006)。 专 业 能 力 欠 缺 还 可 以 
通过 大 量 学 习 过 程 来 进行 弥补 ， 但 遗憾 的 是 人 们 甚至 倾向 于 认为 算法 决策 不 具备 学 习 能 
PT (Highhouse, 2008)。 即 人 们 通常 会 认为 算法 错误 是 系统 性 的 ， 算 法 不 能 从 它们 的 错误 中 学 习 
并 调整 , 但 人 类 错误 是 随机 的 ,人 类 能 够 从 以 往 的 错误 中 吸取 教训 并 随 着 时 间 的 推移 而 改进 
而 机 器 不 能 。 所 以 当 算 法 产生 错误 时 ， 人 们 可 能 会 更 倾向 于 绕 过 算法 ， 不 再 使 用 算法 决策 
(Filiz et al., 2021)。 加 之 有 些 算法 决策 是 不 透明 的 , 人 们 不 清楚 其 来 龙 去 脉 (Angwin etal., 2016; 


O’Neil, 2017)， 认 为 算法 无 法 学 习 或 调整 的 看 法 可 能 会 更 强烈 。 
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2.2 道德 地 位 缺失 

算法 拒绝 的 第 二 个 原因 是 算法 的 道德 地 位 缺失 , 因此 算法 无 法 承担 决策 后 的 责任 。 许多 
时 候 ， 人 们 遵从 他 人 决策 的 目的 是 为 了 转移 和 削弱 自己 承担 的 责任 ,而 如 果 算 法 缺失 道德 主 
体 地 位 ， 则 其 在 承担 责任 或 者 广义 的 决策 上 便 显 得 无 用 ,造成 人 们 的 算法 拒绝 。 从 实际 表现 


上 来 说 , 相对 于 非 道德 决策 领域 , 一 旦 决策 涉及 道德 领域 , 人 们 的 算法 拒绝 倾向 则 更 为 明显 。 

对 于 涉及 人 类 生死 问题 的 道德 决策 , 即使 机 器 决策 带 来 了 积极 的 结果 ， 人们 也 宁愿 选择 一 个 
普通 水 平 的 人 类 而 不 愿 选 择 一 个 高 水 平 的 机 器 (Bigman et al., 2019)。 同 时 ， 在 经 济 博弈 任务 
中 ， 人 们 更 喜欢 将 与 他 人 报酬 有 关 的 决策 任务 委托 给 人 类 而 非 机 器 , 因为 人 们 认为 与 他 人 有 
关 的 任务 涉及 ， 而 大 多 数 人 本 能 地 不 喜欢 在 道德 领域 使 用 机 器 (Gogoll & Uhl, 2018)。 在 
投资 方面 ， 人 们 也 更 喜欢 人 类 基金 经 理 帮 自己 投资 ,尤其 是 当 投资 类 型 涉及 到 道德 时 ， 人 们 
会 表现 出 更 强 的 算法 拒绝 , 因为 人 们 认为 需要 由 道德 能 力 (moral competence) 水 平 更 高 的 基金 
经 理 来 判断 投资 一 些 在 道德 上 有 和 争议 的 公司 是 否 是 恰当 的 , 而 人 们 认为 机 器 不 具备 这 种 能 力 
(Niszczota & Kaszas, 2020)。 这 可 能 是 因为 与 其 他 决策 不 同 , 道德 决策 深 深 植 根 于 情感 之 中 ， 

需要 由 具有 完全 道德 地 位 的 主体 做 出 决策 (Gray et al., 2017; Haidt, 2001)。 而 人 们 基于 感知 到 


的 心智 差异 来 判断 谁 拥 有 “〔 或 缺乏 ) 完全 的 道德 地 位 (Bastian et al., 2012; Gray et al., 2012). 


心智 是 通过 两 个 维度 被 感知 的 ， 即 能 动 性 (agency) 和 体验 性 (experience; Gray et al., 2007)。 能 
动 性 是 指 思 考 、 推 理 、 计 划 和 实现 意图 的 能 力 ; 而 体验 性 是 指 感受 情绪 和 诸如 疼痛 等 感觉 的 
能 力 (Gray et al., 2012)。 

算法 通常 被 认为 具有 一 定 程度 的 道德 主体 地 位 , 但 这 种 道德 主体 地 位 感知 又 远 弱 于 人 类 。 
比如 ， 算 法 有 一 定 的 能 动 性 (Gray & Wegner, 2012)， 如 它们 可 以 进行 复杂 的 计算 ;但 完全 意 
义 的 能 动 性 不 仅 局 限于 原始 的 复杂 计算 , 还 应 包括 自我 控制 计划、 沟通 和 思考 等 能 力 (Gray 
etal., 2007)。 也 有 其 它 研 究 认为 ,做 出 道德 决策 的 主体 应 具有 交互 性 (interactivity)、 自 主 性 


(autonomy ) 和 适应 性 (adaptability; Floridi & Sanders, 2004), 以 及 道德 推理 (moral reasoning)、 


自主 行为 (autonomous action )、 沟 通 和 判断 行为 后 果 (Cushman, 2008) 等 能 力 (Malle, 2016; 
Malle & Scheutz, 2014)。 而 机 器 不 具备 这 些 能 力 ， 因 此 人 们 也 认为 机 器 不 具备 做 出 道德 决策 
的 能 力 。 除了 能 动 性 以 外 , 体验 性 对 于 道德 决策 也 很 重要 。 情绪 对 道德 决策 至 关 重要 (Greene 
et al., 2001; Haidt, 2001; Haidt et al., 1993; Koenigs et al., 2007)， 尤 其 是 移 情 的 能 力 ， 即 感受 他 
人 痛苦 的 能 力 ， 似 乎 是 道德 判断 的 核心 要 素 (Aaltola, 2014; Decety & Cowell, 2014)。 而 机 器 
似乎 缺乏 感受 真实 情感 的 能 力 (Reinecke et al., 2021)。 因 此 ， 尽 管 机 器 具有 一 定 程 度 的 能 动 
性 , 但 它们 缺乏 体验 性 (Brink et al., 2019), 缺乏 感受 道德 情绪 的 能 力 (Malle & Scheutz, 2014), 
它们 依然 不 具备 道德 决策 能 力 。 

最 为 重要 的 是 ， 若 算法 的 道德 主体 地 位 不 足 ， 其 便 无 法 很 好 地 承担 道德 责任 。 一 旦 算法 
无 法 承担 道德 责任 , 则 人 类 在 决策 中 便 缺 乏 将 责任 转移 给 算法 的 可 能 ， 从 道德 责任 分 担 意义 
上 来 说 ， 算 法 决策 便 无 可 取 之 处 (Bonaccio & Dalal, 2006)。 换 句 话 说 ， 当 遵循 或 纳入 人 类 决 
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策 者 的 建议 时 ， 人 们 会 感觉 自己 对 该 决策 的 责任 转移 到 了 建议 者 身上 , 但 若 遵循 或 纳入 算法 
决策 , 这 种 责任 则 不 会 转移 , 因为 人 们 认为 算法 没有 承担 责任 的 能 力 (Bonaccio & Dalal, 2006). 
Armstrong(1980) 发 现 , 即使 有 压倒 性 的 证 据 表 明 专 家 的 判断 和 建议 有 时 并 不 比 普通 人 更 准确 
人 们 仍然 更 相信 这 些 专 家 。 这 种 现象 在 政治 预测 、 冲 突 结果 预测 和 股市 预测 等 不 同 领域 都 有 
发 现 (Green & Armstrong, 2007; Tetlock, 2009)。Armstrong(1980) 认 为 ， 这 种 对 专家 依赖 的 一 个 
原因 是 责任 转移 ， 即 如 果 预 测 结果 不 准确 ， 专 家 会 受到 更 多 的 责备 ， 人 们 就 可 以 转移 自己 决 
策 失 误 的 责任 。 而 Bonaccio 和 Dalal(2006) 认 为 ， 只 有 当 决 策 建 议 者 是 人 类 的 时 候 ， 分 担 和 
推卸 责任 这 样 的 动机 才 起 作用 ,车 建议 来 自 算 法 ,这 种 动机 便 不 起 作用 了 。 因 为 人 类 被 认为 
有 能 力 承担 责任 ， 而 算法 则 没有 (Promberger & Baron, 2006)。 例 如 ， 在 医疗 上 ， 当 患者 不 得 
不 决定 重要 的 医疗 程序 时 , 他 们 不 愿 承 担 该 决策 的 责任 , 而 是 将 其 转移 给 其 他 人 一 一 人 类 医 
E, 因为 遵循 医生 的 建议 可 以 让 病人 感觉 自己 不 需要 承担 太 多 责任 , 但 是 遵循 算法 建议 不 会 


= 以 同样 的 方式 减少 他 们 的 责任 感知 (Promberger & Baron, 2006). 
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一 2.3 人 类 特性 削 没 
7 人 类 特性 淹没 是 算法 拒绝 的 第 三 个 原因 , 即 人 类 感知 到 算法 决策 对 人 类 身份 或 独特 性 的 
更 具象 征 性 的 威胁 ， 因 无 法 展示 出 自身 的 独特 性 而 失去 控制 感 。 首 先 ， 从 人 类 个 体 来 看 ， 通 
常情 况 下 ， 人们 倾向 于 认为 自己 是 独特 而 不 同 于 他 人 的 , 这 种 独特 性 寻求 在 个 体 主义 文化 下 
尤其 (Brewer, 1991)。 而 算法 相对 理性 , 在 没有 个 人 数据 的 情况 下 只 能 以 标准 化 和 模式 化 的 方 
式 操 作 ， 以 同样 的 方式 处 理 每 一 种 情况 (Haslam, 2006)， 这 两 种 基本 信念 的 不 匹配 使 人 们 抵 
© 触 算法 决策 。 研 究 发 现 ， 与 人 类 医疗 服务 者 相 比 ， 消 费 者 更 不 愿意 使 用 人 工 智 能 医疗 服务 ， 
因为 人 工 智能 医疗 服务 引发 了 人 们 的 一 种 担忧 , 即 一 个 人 的 独特 特征 、 环 境 和 症状 将 被 忽视 ， 
这 种 担忧 被 称 为 独特 性 忽视 (Longoni etal.,2019)。 即 例如 ， 在 消费 领域 ， 产 品 特征 和 消费 者 
需求 的 信息 不 对 称 会 伤害 企业 与 消费 者 之 间 的 关系 (Van Swol, 2009)。 人 们 在 更 主观 的 任务 
中 更 不 愿意 使 用 算法 (Castelo et al., 2019)， 如 人 们 更 依赖 朋友 而 不 是 算法 推荐 电影 与 书籍 或 
讲 笑话 ， 因 为 这 些 决策 任务 受 个 人 品味 支配 (Yeomans et al.,2019); 相反 ,在 体育 预测 等 具有 
具体 外 部 准确 性 标准 的 领域 ， 人 们 可 能 会 对 算法 建议 感到 更 信任 (Logg et al., 2019)。 
算法 决策 带 来 的 个 性 消失 更 深层 次 的 原因 可 能 是 对 整个 人 类 群体 身份 与 独特 性 淹没 的 
担忧 , 即 人 们 感知 到 算法 决策 对 人 类 内 部 群体 的 独特 性 和 价值 观 的 威胁 , 甚至 感觉 自己 被 非 
人 化 (dehumanization)。 人 类 认为 自己 与 其 它 群体 截然 不 同 ,但 算法 决策 尤其 是 高 自主 性 的 


算法 决策 对 环境 的 掌控 可 能 会 模糊 “人 类 ”与 “工具 ”之 间 的 界限 。 例 如 人 们 更 讨厌 不 听 人 
类 指令 而 能 自主 根据 环境 而 做 出 判断 与 决策 的 机 器 人 ,感知 到 的 威胁 也 更 高 (Ztotowski et al., 
2017)。 申 请 研究 生 时 仅 通过 数据 信息 而 不 是 面对面 的 交谈 也 被 认为 是 不 人 道 的 (Dawes， 
1979)。 因 此 ， 提 高 主体 参与 或 许 能 够 提高 算法 认同 。 相 比 单独 使 用 算法 决策 ， 人 们 更 偏好 
算法 与 专家 的 共同 决策 , 只 要 算法 辅助 的 使 用 不 取代 人 类 的 判断 ; 对 于 不 使 用 算法 辅助 决策 
的 专家 和 使 用 算法 辅助 共同 做 决策 的 专家 ， 人 们 甚至 更 倾向 于 后 者 (Palmeira & Spassova, 
2015). Pezzo 等 人 (2006) 的 研究 也 表明 ， 与 没有 算法 支持 的 医生 相 比 ， 使 用 算法 支持 的 医生 
犯错 时 ， 人 们 对 其 负面 评价 更 小 。 即 使 是 一 个 不 完美 的 专家 加 入 决策 过 程 中 ,也 可 能 会 更 轻 
松 地 排除 障碍 ， 做 出 更 好 的 决策 Kuncel,2008)。 当 然 ， 研 究 也 发 现 ， 如 果 算 法 决策 不 是 替代 
1 只 是 辅助 ,， 最终 决 策 还 是 由 人 来 决定 ， 人 们 则 不 会 感受 到 人 类 特性 的 漂 灭 ， 此 时 算法 拒绝 
便 会 减弱 。 例 如 ， 相 对 于 执行 算法 ， 人 们 更 容易 接受 和 喜欢 咨询 算法 ， 也 就 是 说 ， 相 比 算法 
代替 自己 决策 ， 人 们 更 能 接受 算法 给 出 决策 建议 (Dietvorst etal,2015)。 将 机 器 限定 在 从 属于 
人 类 的 角色 , 而 由 人 类 做 出 最 终 决 定 , 可 以 在 一 定 程度 上 减轻 人 们 对 算法 决策 的 拒绝 (Bigman 
& Gray, 2018). Longoni 等 人 (2019) 也 发 现 ， 当 医疗 人 工 智 能 只 是 辅助 而 不 是 替代 人 类 医生 做 
决策 时 , 并 没有 出 现 对 医疗 人 工 智 能 的 抵制 。 知人 们 能 自主 修改 算法 决策 结果 以 掌握 最 终 决 


策 权 ， 人 们 也 会 更 接受 算法 决策 (Dietvorst et al., 2018)。 
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3 算法 拒绝 之 改变 

算法 和 算法 决策 在 人 工 智 能 时 代 不 可 避免 地 渗入 人 类 生活 , 且 实际 上 已 有 大 量 算 法 在 驱 
动人 类 的 信息 获取 及 理解 (如 网 站 推荐 算法 )， 只 是 人 们 尚未 意识 到 。 算 法 决策 不 可 避免 地 
在 未 来 会 获得 越 来 越 多 的 应 用 。 虽 算法 决策 还 在 迅速 发 展 的 阶段 ， 在 一 些 领 域 还 不 够 成 熟 ， 
但 其 在 许多 问题 上 的 决策 能 力 已 然 超越 人 类 , 而 人 类 出 于 种 种 原因 尚未 接受 它 , 若 能 使 人 们 
欣赏 其 效用 , 提高 对 算法 决策 的 认同 与 接受 度 , 或 许 能 为 许多 个 人 实际 问题 的 解决 带 来 事 半 
功 倍 的 效果 ， 同 时 为 社会 带 来 经 济 效益 。 因 此 ， 针 对 算法 主体 怀疑 、 道 德 地 位 缺失 以 及 人 类 
特性 淹没 三 种 算法 拒绝 的 原因 一 一 实际 上 , 这 三 种 原因 对 应 着 人 类 的 三 种 心理 动机 , 即 信任 、 
责任 和 掌控 ,我 们 提出 提高 算法 认同 的 三 种 方式 : 提高 人 类 对 算法 的 信任 度 、 强 化 算法 的 主 
体 责任 ， 以 及 探索 个 性 化 算法 设计 以 突显 人 对 算法 决策 的 控制 力 。 


3.1 提高 对 算法 的 信任 度 
对 抗 算 法 主体 怀疑 的 核心 因素 可 能 是 信任 。 不 难 发 现 , 信任 贯穿 于 算法 拒绝 的 大 部 分 原 
因 之 中 。 人 类 自身 的 认 知 特征 如 在 算法 方面 的 经 验 不 足 、 对 算法 能 力 的 感知 不 足 ， 以 及 在 算 
法 决策 中 的 参与 度 不 足 都 可 能 导致 对 算法 决策 的 不 信任 或 信任 脆弱 ， 从 而 拒绝 算法 决策 。 对 
算法 决策 的 不 信任 体现 在 两 方面 。 第 一 ， 人 们 对 算法 决策 的 信任 本 就 不 如 人 类 决策 。 相 比 人 
类 决策 ， 人 们 在 了 解 到 算法 决策 不 完美 或 经 历 其 失误 之 前 ， 就 已 经 不 那么 信任 算法 决策 
(Longoni, etal., 2019)。 第 二 ， 人 们 对 算法 决策 的 信任 更 脆弱 ， 这 意味 着 ,与 人 类 相 比 ， 一 两 
次 算法 方面 的 糟糕 经 历 对 其 信任 造成 的 伤害 更 大 (Prahl & Van Swol, 2017)。 因 此 人 们 能 容忍 
人 类 的 失误 ， 却 不 接受 算法 的 失误 。Dietvorst 等 人 (2018) 就 发 现 ， 人 们 对 算法 决策 错误 的 容 
妨 度 更 低 ， 当 他 们 看 见 算法 决策 错误 时 ,对 其 信心 会 陡然 下 降 , 之 后 的 选择 也 会 避 开 算法 决 
= 策 。 因此， 人 们 拒绝 算法 决策 的 很 大 一 部 分 原因 是 人 们 没有 建立 起 对 算法 决策 的 信任 (Lee & 
Seppelt, 2006)， 或 者 说 算法 没有 “说 服 ” 人 类 相信 其 决策 能 力 。 

就 算法 拒绝 研究 来 说 , 提高 信任 以 减少 对 算法 主体 及 算法 能 力 的 怀疑 , 最 简单 的 办 法 当 
然 是 提高 人 类 对 算法 的 专业 知识 和 熟悉 性 ,并 同时 更 多 地 展示 算法 能 力 。 随 着 越 来 越 多 算法 
和 人 工 智 能 科技 元 素 在 人 类 生活 中 的 出 现 , 实际 上 人 类 对 算法 决策 的 知识 和 熟悉 性 会 逐渐 提 
高 直至 习以为常 。 这 时 ， 展 示 算 法 能 力 便 尤 为 重要 。 比 如 ， 专 业 和 有 效 的 算法 建议 会 使 人 们 
对 其 更 信任 从 而 提高 算法 利用 度 (Goodyear 2016; Kramer et al., 2018); 人 工 智 能 医疗 服务 能 
给 医疗 领域 带 来 革命 性 变化 的 前 提 就 是 其 可 以 达到 专家 级 的 准确 性 (Leachman & Merlino, 
ton 2017)。 此 外 ， 若 人 们 能 根据 自己 的 需求 自主 调整 算法 输出 (Greene et al., 2016)， 他 们 对 算法 
O 决策 学 习 或 调整 能 力 的 感知 也 会 更 强 , 虽然 算法 决策 还 远 非 完美 , 但 人 们 实际 上 愿意 接受 虽 

会 犯错 但 可 以 学 习 或 调整 的 算法 (Berger etal.,2021)。 不过, 现 阶段 算法 决策 的 专业 性 似乎 只 


有 在 与 人 类 决策 进行 比较 并 明显 优 于 人 类 时 才能 得 到 凸显 (Bigman & Gray, 2018). 


T 


3.2 强化 算法 的 主体 责任 

人 们 偏好 人 类 决策 而 不 喜欢 算法 决策 可 能 出 于 分 担 和 推卸 责任 的 动机 。 对 于 人 类 来 说 ， 
出 于 类 似 动机 则 必然 需要 算法 承担 道德 责任 , 这 也 意味 着 需要 强化 算法 作为 道德 主体 的 道 
地 位 ， 即 让 算法 更 像 人 。 这 种 所 谓 “ 像 人 ”有 两 种 方式 ， 一 种 是 让 其 看 起 来 像 人 ， 而 另 一 
种 是 让 其 似乎 具有 人 类 的 定义 性 能 力 。 先 说 后 一 种 , 即 提高 人 们 对 算法 心智 能 力 的 感知 实际 
上 可 以 提高 大 众 对 算法 决策 的 接受 度 。 当 算法 或 人 工 智能 看 起 来 越 具有 类 似 于 人 类 的 心智 能 


nt 


EE 


力 ， 人 们 就 越 相 信 它 能 完全 胜任 其 预期 功能 (Waytz et al.,2014)。 因 为 有 意识 的 行为 主体 会 被 
认为 更 能 控制 自己 的 行为 , 因而 更 能 通过 有 意识 的 预测 和 计划 来 成 功 完成 任务 并 对 其 行为 与 
结果 负责 (Cushman,2008)。 例如， 提高 算法 的 感知 情感 相似 性 可 以 有 效 地 增加 算法 在 主观 任 


务 中 的 使 用 (Castelo et al., 2019)。 

而 对 于 以 人 工 智 能 体 如 机 器 、 机 器 人 和 自动 驾驶 汽车 等 为 载体 的 算法 决策 , 则 可 以 通过 
拟人 化 过 程 提高 其 类 人 程度 以 强化 其 道德 主体 地 位 ,拟人 化 是 指 将 人 类 独 有 的 本 质 特征 赋予 
非 人 对 象 的 心理 过 程 (Waytz et al., 2010; 许 丽 颖 等 ,2017)， 例 如 可 以 从 物理 特征 〈 脸 部 、 眼 
睛 、 身 体 、 动 作 )、 心 理 特征 (喜好, 幽默, 个 性 , 感情 , 同 理 心 )、 语言 〈 口 语 、 语 言 识别 入 
社会 动态 〈 人 合作， 鼓励 ， 回 答 问 题 ， 互 惠 ) 和 社会 角色 (医生 、 队 友 、 对 手 、 老 师 、 完 物 、 
导游 ) 等 方面 增加 算法 或 人 工 智 能 体 的 类 人 线索 (Fogg, 2002). 重要 的 是 , 籍 由 拟人 化 还 能 影 
响 心 智 感知 尤其 是 理性 思维 《能 动 性 ) 和 意识 感觉 (体验 性 ; Gray et al.,2017)。 研 究 发 现 ， 在 
一 心智 知觉 上 将 人 工 智 能 体 拟人 化 ， 确 实 可 以 提高 人 们 对 它们 的 信任 ， 以 自动 驾驶 汽车 为 例 ， 
= 当 其 能 感知 和 思考 周围 环境 ,而 不 仅仅 是 一 个 没有 脑子 的 机 器 时 ,它们 会 看 起 来 更 善于 在 车 
流 中 和 罕 梭 驾驶 (Waytz etal,2014)。 此 外 ， 对 人 工 智 能 体外 在 特征 的 拟人 化 可 以 间接 提高 人 们 
对 其 心智 能 力 的 感知 ， 进 而 更 信任 该 人 工 智能 体 。 例如 ， 当 自动 区 驶 汽车 的 外 在 物理 特征 被 
拟人 化 时 ， 如 赋予 其 名 字 、 性 别 和 类 似 于 人 类 的 声音 ， 人 们 会 更 信任 它 ， 如 果 发 生 了 由 他 人 
错误 造成 的 意外 事故 ， 人 们 对 拟人 化 自动 芍 驶 汽车 的 责备 会 更 小 ; 相反 , 若 自 动 驾 驶 汽车 成 
功 规避 了 该 意外 事故 ， 人 们 会 将 成 功 更 多 地 归 因 于 拟人 化 自动 区 驶 汽车 (Waytz et al., 2014). 
PR, 过度 的 拟人 化 或 心智 能 力 感知 也 可 能 适得其反 ,， 当 算法 或 人 工 智 能 体 在 外 观 或 心智 能 
rr 力 上 与 人 类 达到 一 定 相 似 度 时 ， 人 们 对 其 好 感 会 陡然 下 降 ， 甚 至 感到 不 安 与 害怕 (Gray & 

Wegner, 2012)， 因 而 拒绝 算法 决策 ， 此 即 恐 怖 谷 效应 (uncanny valley effect; Mori, 1970). [Al 
此 ， 当 赋予 算法 或 人 工 智 能 体 以 人 类 独特 特征 时 ， 应 当 控 制 在 让 人 们 感到 舒适 的 范围 内 ， 从 
而 使 人 们 更 认同 与 信任 算法 决策 。 


必须 说 明 的 是 ， 尽 管 研究 已 发 现 算法 在 预测 任务 (Jordan & Mitchell, 2015)、 棋 类 游戏 


IK 


(Dockrill, 2017; Silver, 2017) 以 及 股市 回报 最 大 化 (Zuckerman, 2019) 等 各 种 决策 任务 中 表现 优 
于 人 类 ， 但 道德 相对 而 言 更 主观 ( 喻 丰 ， 韩 婷 婷 ,2018)， 就 像 在 道德 困境 问题 上 ， 有 人 秉持 义 
务 论 而 有 人 秉持 功利 主义 ， 暂 无 明确 证 据 表 明 算法 是 否 能 比 人 类 做 出 更 好 的 道德 决策 。 算法 
认同 是 指 能 欣赏 算法 决策 的 效用 ， 对 算法 的 积极 态度 和 行为 Jussupow et al., 2020)， 而 不 是 
对 算法 决策 的 盲目 接受 , 尤其 在 面临 道德 问题 时 ， 应 更 审慎 地 看 待 算 法 决策 。 哪怕 改进 算法 
让 人 们 产生 了 算法 拟人 化 过 程 , 问题 本 质 并 没有 改变 , 即 或 许可 以 提高 人 们 对 算法 承担 责任 


的 能 力 感知 以 减轻 算法 拒绝 , 但 很 有 可 能 并 不 能 完全 打消 人 们 对 责任 归 因 的 顾虑 ,因此 更 重 

要 的 问题 是 研究 算法 或 人 工 智 能 的 责任 归 因 问题 ， 到 底 算法 决策 错误 应 由 谁 负责 ， 设 计 者 、 

生产 者 亦 或 是 使 用 者 ? 随 日益 普及 , 这 是 一 个 在 未 来 必须 面 对 的 问题 , 也 是 减少 

或 消除 人 们 对 于 算法 决策 责任 归 因 顾虑 的 最 有 效 方法 。 哪怕 算法 能 够 最 终 进行 责任 分 担 , 我 

们 如 何 对 其 进行 惩罚 也 将 是 面临 的 一 个 难题 ,在 这 一 点 上 , 也 许 同时 对 人 类 进行 道德 规范 教 
责 


育 ， 让 其 更 多 承担 道德 责任 并 更 少 推 责 也 是 并 行 不 悖 的 方案 。 
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3.3 探索 个 性 化 算法 设计 
人 类 特性 淹没 的 表象 是 无 法 展示 出 自身 的 独特 性 , 而 背后 潜藏 的 动机 即 人 类 缺乏 对 于 外 
部 世界 的 掌控 ， 或 者 说 算法 决策 让 人 类 感知 到 自主 性 (autonomy) 丧 失 。 为 了 还 原 人 类 的 控制 
K 感 , 让 人 感知 到 自己 作为 独特 个 体 的 存在 , 探索 个 性 化 算法 设计 以 突显 人 类 对 算法 决策 的 控 


5 制 力 可 能 是 较 好 的 选择 。 这 可 能 体现 在 满足 人 类 个 性 化 需求 上 , 也 可 能 表现 在 人 类 对 于 决策 
一 首先 ,， 当 人 们 认为 算法 可 以 了 解 自 己 的 个 人 偏好 时 ,算法 决策 会 变 得 更 容易 被 认同 与 欣 


赏 。 例 如 ,在 消费 领域 ， 能 预测 消费 者 对 商品 感知 吸引 力 的 电子 商品 筛选 工具 ， 可 以 从 海量 
商品 中 优先 向 消费 者 推荐 其 更 喜欢 、 更 有 可 能 购买 的 产品 (Diehl et al., 2003)， 既 能 减少 顾客 
搜索 优质 产品 的 时 间 成 本 ， 也 能 提高 商家 成 功 卖 出 产品 的 可 能 性 (Senecal & Nantel, 2004). 
在 医疗 领域 ， 对 独特 性 的 关注 一 一 即 医疗 人 工 智 能 若 能 提供 更 个 性 化 与 更 具有 针对 性 的 服 
务 ， 能 缓解 人 们 对 医疗 人 工 智 能 的 抵制 Longoni et al., 2019)。 在 投资 领域 ， 更 个 性 化 的 投资 
建议 也 会 更 受 消费 者 的 喜爱 与 信任 (Alserda et al., 2019; Lourenço et al., 2020). 

虽 个 性 化 算法 决策 已 然 是 发 展 趋势 ,比如 许多 公司 使 用 算法 推荐 新 闻 或 其 他 信息 , 但 这 
也 会 造成 新 的 问题 。 第 一 是 回声 室 
息 传播 媒介 大 量 采用 算法 , 其 基本 原理 是 个 体 对 于 某 种 事物 的 偏爱 会 增加 推荐 频率 , 而 这 种 
所 谓 的 偏爱 实际 上 可 能 是 基于 其 历史 信息 获取 的 经 验 共 现 , 也 可 能 是 基于 简单 的 标签 。 无论 
是 何 种 方式 ， 这 种 信息 回声 室 效应 也 为 人 编织 了 一 个 信息 的 房间 ， 它 屏蔽 其 他 信息 ， 让 个 体 
在 某 一 类 信息 中 娱乐 至 死 ， 这 便 是 信息 草 房 。 第 二 便 是 隐私 问题 。 个 性 化 算法 决策 离 不 开 对 
个 人 数据 的 收集 。 实 际 上 人 们 并 不 希望 在 所 有 和 领域 都 提供 个 性 化 算法 服务 。 研 究 发 现 ， 人 们 
对 商业 应 用 《如 购物 和 娱乐 ) 方面 的 个 性 化 服务 态度 更 积极 ， 但 反对 新 闻 来 源 、 社 交 媒 体 、 


政治 竞选 的 个 性 化 ， 反 对 算法 收集 和 使 用 敏感 的 个 人 信息 (Ipsos Mori, 2020; Pew Research 


效应 (Echo Chamber Effect; Cinelli et al., 2021)。 现 在 的 信 


Center, 2019)。 人 们 需要 的 不 仅 是 个 性 化 算法 ， 更 是 透明 的 个 性 化 算法 ， 即 尊重 人 们 的 数据 
隐私 ， 并 且 可 以 受用 户 调整 (Kozyreva et al., 2021)。 为 了 提高 人 类 个 性 化 感知 而 过 度 收集 数 
据 ， 侵 犯人 们 的 隐私 或 在 人 们 敏感 的 领域 越界 应 用 ， 可 能 适得其反 。 

其 次 , 应 让 人 类 在 决策 系统 中 拥有 最 终 发 言 权 。 未 来 我 们 将 看 到 越 来 越 多 的 机 器 在 人 类 
< 同 的 环境 中 生活 ， 而 让 算法 完全 蔡 代 人 类 决策 或 取代 人 类 的 工作 从 来 不 是 一 个 好 的 选择 。 
人 类 和 算法 擅长 的 方面 是 不 一 样 的 ， 算 法 或 许 比 我 们 更 能 把 一 件 事情 “做 好 ” 但 只 有 人 类 
才 知 道 要 “做 什么 ”和 “怎么 做 ” 利用 算法 决策 强大 的 计算 与 整合 信息 能 力 的 优点 ， 来 弥 
补 人 类 决策 的 缺点 , 将 人 类 的 智慧 运用 在 人 类 更 擅长 而 算法 不 可 及 的 地 方 ， 相 辅 相 成， 以 算 
法 辅助 人 类 或 人 机 合作 决策 ， 才 是 更 好 的 选择 。 因 此 ， 加 强人 类 和 算法 的 合作 决策 ， 同 时 确 

保 人 类 在 决策 中 的 主体 地 位 , 以 算法 辅助 人 类 而 不 是 蔡 代 人 类 能 使 人 们 对 算法 决策 持 更 开放 
> 的 态度 。 总 之 ， 相 较 于 单独 的 算法 决策 或 人 类 决策 ， 人 们 可 能 认为 人 类 与 算法 合作 能 做 出 更 


™ 优 的 决策 (Palmeira & Spassova, 2015; M. V. Pezzo & S. P. Pezzo, 2006)， 但 前 提 是 人 类 拥有 最 


= 终 决 策 权 (Starke & Liinich, 2020)。 我 国学 者 钱学森 早 在 上 个 世纪 就 已 提出 综合 集成 研讨 厅 方 
= Be, EADE, WLS, KERRIE TERREI KR 
= 高 速 处 理 信息 的 能 力 和 人 的 综合 思维 能 力 (包括 逻辑 思维 、 形 象 思维 和 创造 思维 ) 结合 起 来 
= GEER, 2005)。 钱 学 森 的 想法 是 基于 人 类 至 上 的 角度 考虑 问题 ， 将 人 类 的 智慧 和 利益 放 在 


首位 ( 李 月 白 , 江 晓 原 , 2019)， 这 对 于 今天 的 算法 决策 研究 仍 有 深刻 启发 。 


= 4 讨论 与 总 结 


算法 拒绝 的 三 维 动机 理论 实际 上 是 在 模拟 人 类 面临 算法 决策 时 的 直觉 思维 框架 , 也 就 是 
人 类 在 面临 算法 决策 时 , 大 略 会 问 的 几 个 递 进 问题 ， 即 是 否 了 解 算 法 并 认为 其 有 能 力 进行 决 
策 、 是 否 使 用 算法 而 导致 决策 失败 后 自己 承担 责任 以 及 是 否 使 用 算法 会 显得 自己 缺乏 作为 人 
类 个 体 的 独特 性 。 这 三 个 问题 朝 示 出 人 类 信任 /怀疑 、 担 责 / 推 责 、 掌 控 / 失 控 的 三 种 动机 。 虽 
已 综述 现 有 研究 并 尝试 理论 建构 ， 但 仍 须 承 认 尚 有 诸多 待 探 讨 空 间 。 

其 一 ， 此 理论 似乎 暗含 一 种 算法 决策 强 于 人 类 决策 ， 而 将 算法 决策 的 接受 视 为 "应 该 ”的 
倾向 。 实 际 上 ， 人 类 并 非 因 理性 而 决策 ， 甚 至 人 之 所 以 为 人 正 是 因为 人 有 独特 于 机 器 的 理性 
之 处 。 研 究 发 现 ,在 人 工 智能 时 代 人 类 会 将 那些 算法 比 人 强 的 能 力 〈 如 一 般 认 知 能 力 、 身 体 
能 力 、 消 极 情绪 等 ) 视 作 不 重要 , 而 将 道德 、 审美 等 能 力 凸 显 以 区 分 自己 与 机 器 ( 喻 丰 , 2020)。 
人 性 光辉 有 时 就 闪现 于 情感 而 非 机 器 理性 中 。 同 时 ， 人 类 接受 或 者 不 接受 某 种 事物 ， 并非 一 


定 源 于 其 相 较 于 人 类 具备 优势 ,人 类 不 会 因为 某 种 制度 有 优势 就 理应 接受 之 ,也 不 会 因为 某 
种 商品 更 物美 价 廉 便 理 应 抛弃 其 他 商品 .不 以 事实 描述 的 优 劣 做 规范 应 该 的 判断 依据 本 身 也 
是 人 类 特征 ,否则 人 便于 算法 无 异 。 实际 上 该 理论 并 未 预 设 这 种 规范 性 立场 ， 只 是 在 探究 为 
何 算 法 在 某 些 方面 强 于 人 类 ， 而 人 类 依旧 选择 拒绝 算法 的 原因 。 当 然 ， 此 理论 确 有 期 望 人 类 
可 以 利用 算法 决策 之 优势 来 优化 自身 决策 的 可 能 , 但 并 非 在 强调 必须 用 算法 决策 蔡 代 人 类 决 
策 。 

其 二 ,算法 拒绝 的 三 维 动机 理论 是 开放 的 ， 并 不 拒绝 其 他 可 能 动机 。 例 如 ,普遍 意义 上 
更 广泛 的 认 知 、 存 在 以 及 社会 动机 均 有 可 能 作为 备 择 动 机 (Jost et al., 2003; Jost et al., 2009)。 
当然 ,我 们 所 描述 的 信任 、 责 任 和 掌控 本 身 就 从 属于 广义 的 社会 或 者 认 知 动机 ,但 是 确实 存 
在 其 他 可 能 。 如 认 知 闭合 需求 ， 此 动机 包含 对 明确 且 完 美 答 案 的 渴望 ， 因 此 高 认 知 闭合 需求 


> 的 个 体 思想 封闭 ,对 开放 性 和 不 确定 感到 不 安 ,进而 对 悬而未决 与 不 确定 的 决策 感到 烦闷 与 
厌恶 (Otto et al., 2016)。 算 法 决策 作为 现代 信息 时 代 的 产物 ， 其 新 颖 性 对 于 高 认 知 闭合 需求 
= 的 个 体 来 说 ， 则 可 能 意味 着 开放 与 不 确定 ， 从 而 引起 算法 拒绝 。 以 往 研究 的 确 发 现 ， 算 法 拒 
= 绝 很 可 能 出 现在 人 们 看 到 算法 出 错 之 后 (Dietvorst et al., 2020)， 这 可 能 是 对 完美 答案 渴望 的 
一 认 知 闭合 需要 与 发 现 算法 失误 的 期 望 偏差 之 间 的 冲突 导致 的 算法 拒绝 。 再 如 社会 认同 , 在 传 


统 的 群 际 理论 中 (Turner etal., 1987)， 最 广泛 的 社会 认同 即 人 类 认同 ， 其 反映 了 自我 作为 人 类 
的 认 知 ， 以 及 与 非 人 类 〔 即 动物 、 其 他 生物 、 非 生物 实体 的 潜在 不 同 。 但 近年 来 研究 发 现 
社会 认同 在 向 非 人 实体 扩张 ， 如 人 与 动物 之 间 可 能 存在 心理 联结 ， 这 种 联结 包括 三 个 维度 ， 
Cc 即 团 结 、 自 豪 与 感知 相似 性 (Amiotetal.,2020)。 这 种 心理 联结 显然 会 使 人 类 对 动物 产生 更 积 
PT 极 的 情感 联结 而 更 喜欢 动物 。 算 法 与 动物 都 属于 非 人 实体 , 若 以 动物 类 比 ,对 算法 缺乏 心理 
联结 或 许 会 导致 对 算法 的 不 喜爱 甚至 厌恶 ， 进 而 导向 算法 拒绝 。 例如 相 比 人 类 医生 ， 人 们 可 
能 对 人 工 智 能 医生 具有 更 少 的 情感 联结 或 情感 寄托 而 拒绝 人 工 智能 医生 .心理 联结 对 于 决策 
过 程 的 理解 也 很 重要 , 尽管 人 类 决策 和 算法 决策 都 是 不 透明 的 , 但 由 于 人 类 之 间 的 心理 联结 
如 感知 相似 性 ， 人们 认为 可 以 通过 自省 的 方式 理解 他 人 决策 的 心理 过 程 (Nisbett, et al., 1977), 


虽然 这 种 理解 并 不 一 定 是 对 的 (Kahneman, 2003; Morewedge & Kahneman, 2010)， 但 这 种 信念 
使 人 们 更 偏好 人 类 决策 (Cadario et al., 2021)， 而 心理 联结 的 缺失 使 人 们 无 法 理解 算法 决策 的 
过 程 而 拒绝 算法 决策 。 这 需要 更 多 研究 ， 而 理论 框架 也 需要 随 之 不 断 完善 。 

其 三 , 强调 心理 动机 在 算法 拒绝 中 的 重要 性 , 并 不 代表 将 心理 因素 置 于 影响 算法 拒绝 的 
所 有 因素 中 的 绝对 主导 地 位 。 人 类 对 算法 决策 的 拒绝 还 可 能 出 于 诸如 法 律 、 政 治 、 社 会 背景 
以 及 哲学 思考 等 的 各 种 主观 原因 或 现实 考虑 。 法 律 因素 包括 “数据 道德 ”或 “AI 道德 ”的 案 


x 


自 、 人 类 隐私 边界 、 个 人 权利 与 自由 以 及 技术 寡头 等 ( 彭 诚信 , 2020); 社会 因素 包括 对 资源 分 
配 不 公平 、 技 术 性 失业 、 阶 层 回 化 以 及 社会 排斥 等 的 担忧 ( 李 明 倩 , 2021; IMEF, 2021); 和 哲 
学 家 也 对 算法 拒绝 的 原因 进行 了 批判 性 的 思考 ， 认 为 技术 化 扩张 可 能 会 带 来 人 类 生存 缺憾， 
侵蚀 人 类 的 生存 意义 与 存在 价值 ， 使 存在 变 得 荒 雇 化 ( 周 露 平 , 2021)。 虽 然 算法 拒绝 的 三 维 
动机 理论 强调 心理 因素 的 作用 , 但 并 非 否 认 其 他 因素 对 算法 拒绝 的 重要 影响 。 算法 拒绝 必然 
是 一 个 由 多 种 复杂 因素 造成 的 现象 , 但 术 业 专攻 所 致 , 此 理论 仅 从 心理 动机 来 探究 其 原因 与 
提高 算法 认同 的 方法 。 

总 而 言 之 , 对 算法 决策 的 拒绝 可 能 是 由 于 算法 主体 怀疑 、 道德 地 位 缺失 和 人 类 特性 淹没 
这 三 维 原因 所 致 ， 这 三 种 原因 背后 反映 出 信任 、 责 任 和 掌控 之 动机 。 未 来 研究 可 探索 算法 拒 
绝 发 生 的 边界 条 件 , 找寻 改变 甚至 逆转 算法 拒绝 现象 的 心理 变量 。 同时 ,进一步 挖 气 算法 
绝 的 其 他 可 能 心理 动机 ,将 其 进行 实证 检验 、 纳 入 并 修正 理论 。 最 后 ， 在 算法 决策 越 来 越 多 
地 以 人 工 智能 体 等 实体 载体 出 现 , 实现 工具 性 至 社会 性 的 转变 时 , 宜 更 多 地 从 社会 性 主体 的 
角度 考察 人 们 对 算法 决策 的 态度 及 与 之 对 应 的 心理 动机 。 


gs 


[ZI 


参考 文献 


黄 志 澄 . (2005). 以 人 为 主 ， 人 机 结合 ， 从 定性 到 定量 的 综合 集成 法 ， 矶 化 交 克 大 学 学 放 ” HAAPAM 25(2), 
55-59. 

李 明 倩 . (2021). Haan Pe: ALTE. BOAT AA (pp. 148-171). 北京 : 商务 印 书馆 . 

FHA, 江 晓 原 . (2019). 钱学森 与 20 世纪 80 年 代 的 人 工 智能 热 . ACMA LAK: HEEL 396), 

24-29. 

彭 诚 信 ( 主 编 ) (2020). MRF: MFRMGHAM HY (pp. 35-41). 上 海 : 上 海 人 民 出 版 社 . 

孙 伟 平 . (2021). 智 能 系统 的 “劳动 ”及 其 社会 后 果 . AAPA, (8), 30-40+128. 

许 丽 颖 , 喻 丰 ， 乌 家 骅 ， 韩 婷 婷 ， 赵 靓 . (2017). 拟人 化 : 从 “ 它 ” 到 “他 ” OPER, 25(11), 1942-1954. 

E. (2020). 论 人 工 智 能 与 人 之 为 人 . ARCH ARH, (1), 30-36. 

喻 丰 ， 韩 婷 婷 . (2018). 有 限 道德 客观 主义 的 概 模型 . EAE ERO ARRIER), 33(157), 148-163+193. 

周 露 平 .2021). 智 能 拜 物 教 的 哲学 性 质 与 批判 超越 .放学 不 移 (8), 41-50. 

Aaltola, E. (2014). Affective empathy as core moral agency: Psychopathy, autism and reason revisited. Philosophical 
Explorations, 17(1), 76-92. 

Alserda, G. A., Dellaert, B. G., Swinkels, L., & van der Lecq, F. S. (2019). Individual pension risk preference 


elicitation and collective asset allocation with heterogeneity. Journal of Banking & Finance, 101, 206-225. 

Amiot, C. E., Sukhanova, K., & Bastian, B. (2020). Social identification with animals: Unpacking our psychological 
connection with other animals. Journal of Personality and Social Psychology, 118(5), 991-1017. 

Andrews, D. A., Bonta, J., & Wormith, J. S. (2006). The recent past and near future of risk and/or need assessment. 
Crime & Delinquency, 52(1), 7-27. 

Angwin, J., Larson, J., Mattu, S., & Kirchner, L. (2016). Machine bias. Retrieved May 19, 2021, from 


https://www.propublica.org/article/machine-bias-risk-assessments-in-criminal-sentencing 


Armstrong, J. S. (1980). The seer-sucker theory: The value of experts in forecasting. Technology Review, 82(7), 16— 
24. 

Badue, C., Guidolini, R., Carneiro, R. V., Azevedo, P., Cardoso, V. B., Forechi, A., ... & De Souza, A. F. (2020). Self- 
driving cars: A survey. Expert Systems with Applications, 113816. 

Bastian, B., Loughnan, S., Haslam, N., & Radke, H. R. (2012). Don’t mind meat? The denial of mind to animals 
used for human consumption. Personality and Social Psychology Bulletin, 38(2), 247-256. 

Berger, B., Adam, M., Riihr, A., & Benlian, A. (2021). Watch Me Improve—Algorithm Aversion and Demonstrating 
the Ability to Learn. Business & Information Systems Engineering, 63(1), 55-68. 

Bigman, Y. E., & Gray, K. (2018). People are averse to machines making moral decisions. Cognition, 181, 21-34. 

Bigman, Y. E., Waytz, A., Alterovitz, R., & Gray, K. (2019). Holding robots responsible: The elements of machine 
morality. Trends in Cognitive Sciences, 23(5), 365-368. 

Biró, P., van de Klundert, J., Manlove, D., Pettersson, W., Andersson, T., Burnapp, L., Chromy, P., Delgado, P., 
Dworczak, P., Haase, B., Hemke, A., Johnson, R., Klimentova, X., Kuypers, D., Nanni Costa, A., Smeulders, 
B., Spieksma, F., Valentín, M. O., & Viana, A. (2021). Modelling and optimisation in European kidney 
exchange programmes. European Journal of Operational Research, 291(2), 447 - 456. 

Bonaccio, S., & Dalal, R. S. (2006). Advice taking and decision-making: An integrative literature review, and 
implications for the organizational sciences. Organizational Behavior and Human Decision Processes, 
101(2), 127-151. 

Bonnefon, J. F., Shariff, A., & Rahwan, I. (2016). The social dilemma of autonomous vehicles. Science, 352(6293), 
1573-1576. 

Bostrom, N. (2014). Superintelligence. Oxford: Oxford University Press. 

Brewer, M. B. (1991). The social self: On being the same and different at the same time. Personality and Social 
Psychology Bulletin, 17(5), 475-482. 

Brink, K. A., Gray, K., & Wellman, H. M. (2019). Creepiness creeps in: Uncanny valley feelings are acquired in 
childhood. Child Development, 90(4), 1202-1214. 

Burton, J. W., Stein, M. K., & Jensen, T. B. (2020). A systematic review of algorithm aversion in augmented decision 
making. Journal of Behavioral Decision Making, 33(2), 220-239. 

Cadario, R., Longoni, C., & Morewedge, C. (2021). Understanding, Explaining, and Utilizing Medical Artificial 
Intelligence. Nature Human Behaviour, https://doi. org/10.1038/s41562-021-01146-0. 

Castelo, N., Bos, M. W., & Lehmann, D. R. (2019). Task-dependent algorithm aversion. Journal of Marketing 
Research, 56(5), 809-825. 

Castelvecchi, D. (2016). Can we open the black box of AI? Nature, 538(7623), 20-23. 

Cinelli, M., Morales, G., Galeazzi, A., Quattrociocchi, W., & Starnini, M. (2021). The echo chamber effect on social 
media. Proceedings of the National Academy of Sciences, 118(9), e2023301118. 

Chouard, T. (2016). The Go files: AI computer clinches victory against Go champion. Nature. 
http://doi.org/10.1038/nature.2016.19553 

Common Cents Lab (2017, August 18). Retrieved May 19, 2021, from _ http://advanced- 
hindsight.com/commoncents-lab/ 

Cushman, F. (2008). Crime and punishment: Distinguishing the roles of causal and intentional analyses in moral 
judgment. Cognition, 108(2), 353-380. 

Dawes, R. M. (1979). The robust beauty of improper linear models in decision making. American Psychologist, 
34(7), 571. 

Decety, J., & Cowell, J. M. (2014). The complex relation between morality and empathy. Trends in Cognitive 
Sciences, 18(7), 337-339. 


Diehl, K., Kornish, L. J., & Lynch Jr, J. G. (2003). Smart agents: When lower search costs for quality information 
increase price sensitivity. Journal of Consumer Research, 30(1), 56-71. 

Dietvorst, B. J., & Bharti, S. (2020). People reject algorithms in uncertain decision domains because they have 
diminishing sensitivity to forecasting error. Psychological Science, 31(10), 1302-1314. 

Dietvorst, B. J., Simmons, J. P., & Massey, C. (2015). Algorithm aversion: People erroneously avoid algorithms after 
seeing them err. Journal of Experimental Psychology: General, 144(1), 114. 

Dietvorst, B. J., Simmons, J. P., & Massey, C. (2018). Overcoming algorithm aversion: People will use imperfect 
algorithms if they can (even slightly) modify them. Management Science, 64(3), 1155-1170. 

Dockrill, P. (2017). In just 4 hours, Google’s AI mastered all the chess knowledge in history. Science Alert. 

Donnelly, L. (2017), “Forget your GP, robots will ‘soon be able to diagnose more accurately than almost any doctor,” 
The Telegraph, Retrieved May 19, 2021, from https://www.telegraph.co.uk/technology/2017/03/07/robots- 
will-soon-able-diagnose-accurately-almost-doctor/ 

Dzindolet, M. T., Pierce, L. G., Beck, H. P., & Dawe, L. A. (2002). The perceived utility of human and automated 
aids in a visual detection task. Human Factors, 44(1), 79-94. 

Esteva, A., Kuprel, B., Novoa, R. A., Ko, J., Swetter, S. M., Blau, H. M., & Thrun, S. (2017). Dermatologist-level 
classification of skin cancer with deep neural networks. Nature, 542(7639), 115-118. 

Filiz, I., Judek, J. R., Lorenz, M., & Spiwoks, M. (2021). Reducing algorithm aversion through experience. Journal 
of Behavioral and Experimental Finance, 100524. 

Floridi, L., & Sanders, J. W. (2004). On the morality of artificial agents. Minds and Machines, 14(3), 349-379. 

Fogg, B. J. (2002). Persuasive technology: Using computers to change what we think and do. San Francisco: Morgan 
Kaufmann. 

Fournier, T. (2016). Will my next car be a libertarian or a utilitarian?: Who will decide?. JEEE Technology and 
Society Magazine, 35(2), 40—45. 

Gogoll, J., & Uhl, M. (2018). Rage against the machine: Automation in the moral domain. Journal of Behavioral 
and Experimental Economics, 74, 97—103. 

Goodyear, K., Parasuraman, R., Chernyak, S., Madhavan, P., Deshpande, G., & Krueger, F. (2016). Advice taking 
from humans and machines: An fMRI and effective connectivity study. Frontiers in Human Neuroscience, 
10, 542. 

Gray, H. M., Gray, K., & Wegner, D. M. (2007). Dimensions of mind perception. Science, 315(5812), 619. 

Gray, K., Schein, C., & Cameron, C. D. (2017). How to think about emotion and morality: Circles, not arrows. 
Current Opinion in Psychology, 17, 41—46. 

Gray, K., & Wegner, D. M. (2012). Feeling robots and human zombies: Mind perception and the uncanny valley. 
Cognition, 125(1), 125—130. 

Gray, K., Young, L., & Waytz, A. (2012). Mind perception is the essence of morality. Psychological Inquiry, 23(2), 
101-124. 

Green, K. C., & Armstrong, J. S. (2007). The ombudsman: Value of expertise for forecasting decisions in conflicts. 
Interfaces, 37(3), 287-299. 

Greene, J., Rossi, F., Tasioulas, J., Venable, K., & Williams, B. (2016, March). Embedding ethical principles in 
collective decision support systems. In Proceedings of 30th AAAI Conference on Artificial Intelligence (pp. 
4147-4151). 

Greene, J. D., Sommerville, R. B., Nystrom, L. E., Darley, J. M., & Cohen, J. D. (2001). An fMRI investigation of 
emotional engagement in moral judgment. Science, 293(5537), 2105-2108. 

Grove, W. M., & Lloyd, M. (2006). Meehl's contribution to clinical versus statistical prediction. Journal of Abnormal 
Psychology, 115(2), 192. 


Haidt, J. (2001). The emotional dog and its rational tail: a social intuitionist approach to moral judgment. 
Psychological Review, 108(4), 814. 

Haidt, J., Koller, S. H., & Dias, M. G. (1993). Affect, culture, and morality, or is it wrong to eat your dog? Journal 
of Personality and Social Psychology, 65(4), 613. 

Harvey, C. R., Rattray, S., Sinclair, A., & Van Hemert, O. (2017). Man vs. Machine: Comparing Discretionary and 
Systematic Hedge Fund Performance. The Journal of Portfolio Management, 43(4), 55—69. 

Haslam, N. (2006). Dehumanization: An integrative review. Personality and Social Psychology Review, 10(3), 252— 
264. 

Highhouse, S. (2008). Stubborn reliance on intuition and subjectivity in employee selection. Industrial and 
Organizational Psychology, 1(3), 333-342. 

Horowitz, M. C. (2016). The ethics & morality of robotic warfare: Assessing the debate over autonomous weapons. 
Daedalus, 145(4), 25-36. 

Ireland, L. (2020). Who errs? Algorithm aversion, the source of judicial error, and public support for self-help 
behaviors. Journal of Crime and Justice, 43(2), 174-192. 

Ipsos Mori. (2020, February). Public attitudes towards online targeting - a report by Ipsos MORI for the Centre for 
Data Ethics and Innovation and Sciencewise (Research report). Ipsos Mori. Retrieved May 19, 2021, from 
https://www.ipsos.com/ipsos-mori/en-uk/public-attitudes-towards-online-targeting 

Jago, A. S. (2019). Algorithms and authenticity. Academy of Management Discoveries, 5(1), 38-56. 

Jordan, M. I., & Mitchell, T. M. (2015). Machine learning: Trends, perspectives, and prospects. Science, 349(6245), 
255-260. 

Jost, J. T., Glaser, J., Kruglanski, A. W., & Sulloway, F. J. (2003). Political conservatism as motivated social cognition. 
Psychological Bulletin, 129(3), 339-375. 

Jost, J. T., Federico, C. M., & Napier, J. L. (2009). Political ideology: Its structure, functions, and elective affinities. 
Annual Review of Psychology, 60, 307-337. 

Jussupow, E., Benbasat, I., & Heinzl, A. (2020). Why are we averse towards algorithms? A comprehensive literature 
review on algorithm aversion. In Proceedings of the 28th European Conference on Information Systems (pp. 
1-16). 

Kahneman, D. (2003). Maps of bounded rationality: Psychology for behavioral economics. American Economic 
Review, 93(5), 1449-1475. 

Kaya, O., Schildbach, J., AG, D. B., & Schneider, S. (2017, August 10). Robo-advice—a true innovation in asset 
management. Deutsche Bank Research. Retrieved May 19, 2021, from 
https://www.dbresearch.com/PROD/DBR_INTERNET_EN-PROD/ PROD0000000000449010/Robo- 
advice - a true innovation in asset managemen.pdf. 

Koenigs, M., Young, L., Adolphs, R., Tranel, D., Cushman, F., Hauser, M., & Damasio, A. (2007). Damage to the 
prefrontal cortex increases utilitarian moral judgements. Nature, 446(7138), 908-911. 

Komatsu, T. (2016, March). Japanese students apply same moral norms to humans and robot agents: Considering a 
moral HRI in terms of different cultural and academic backgrounds. In 2016 11th ACM/IEEE International 
Conference on Human-Robot Interaction (HRI) (pp. 457-458). IEEE. 

Kozyreva, A., Lorenz-Spreen, P., Hertwig, R., Lewandowsky, S., & Herzog, S. M. (2021). Public attitudes towards 
algorithmic personalization and use of personal data online: Evidence from Germany, Great Britain, and the 
United States. Humanities and Social Sciences Communications, 8(1), 1—11. 

Kramer, M. F., Borg, J. S., Conitzer, V., & Sinnott-Armstrong, W. (2018). When do people want AI to make decisions? 
In Proceedings of First Annual AAAI/ACM Conference on Artificial Intelligence, Ethics, and Society (pp. 
204-209). 


Kroll, J. A., Huey, J., Barocas, S., Felten, E. W., Reidenberg, J. R., Robinson, D. G., & Yu, H. (2017). Accountable 
algorithms. University of Pennsylvania Law Review, 165, 633. 

Kuncel, N. R. (2008). Some new (and old) suggestions for improving personnel selection. Industrial and 
Organizational Psychology, 1(3), 343-346. 

Leachman, S. A., & Merlino, G. (2017). The final frontier in cancer diagnosis. Nature, 542(7639), 36-38. 

Lee, J. D., & Moray, N. (1992). Trust, control strategies and allocation of function in human-machine systems. 
Ergonomics, 35(10), 1243-1270. 

Lee, J. D., & Seppelt, B. D. (2006). Human factors and ergonomics in automation design. In G. Salvendy (Ed.), 
Handbook of human factors and ergonomics (pp. 1570-1596). Hoboken, NJ: Wiley. 

Lee, M. K., (2018). Understanding perception of algorithmic decisions: Fairness, trust, and emotion in response to 
algorithmic management. Big Data & Society, 5(1), 2053951718756684. 

Leyer, M., & Schneider, S. (2019). Me, you or AI? How do we feel about delegation. Proceedings of the 27th 
European Conference on Information Systems (ECIS). 

Logg, J. M., Minson, J. A., & Moore, D. A. (2019). Algorithm appreciation: People prefer algorithmic to human 
judgment. Organizational Behavior and Human Decision Processes, 151, 90-103. 

Lohr, Steve (2016, October 17), “IBM is counting on its bet on Watson, and paying big money for it,” New York 
Times, Retrieved May 19, 2021, from https:/www.nytimes.com/2016/10/17/technology/ibm-is-counting- 
on-its-bet-on-watson-and-paying-big-money-for-it.html 

Longoni, C., Bonezzi, A., & Morewedge, C. K. (2019). Resistance to medical artificial intelligence. Journal of 
Consumer Research, 46(4), 629-650. 

Lourengo, C. J., Dellaert, B. G., & Donkers, B. (2020). Whose algorithm says so: The relationships between type of 
firm, perceptions of trust and expertise, and the acceptance of financial Robo-advice. Journal of Interactive 
Marketing, 49, 107-124. 

Luo, X., Tong, S., Fang, Z., & Qu, Z. (2019). Frontiers: Machines vs. humans: The impact of artificial intelligence 
chatbot disclosure on customer purchases. Marketing Science, 38(6), 937—947. 

Lusardi, A., & Mitchell, O. S. (2011). Financial literacy around the world: an overview. Journal of Pension 
Economics & Finance, 10(4), 497-508. 

Malle, B. F. (2016). Integrating robot ethics and machine morality: The study and design of moral competence in 
robots. Ethics and Information Technology, 18(4), 243-256. 

Malle, B. F., & Scheutz, M. (2014). Moral competence in social robots. In 2014 IEEE International Symposium on 
Ethics in Science, Technology and Engineering, Ethics in Science, Technology and Engineering (pp. 1—6). 

Malle, B. F., Scheutz, M., Arnold, T., Voiklis, J., & Cusimano, C. (2015, March). Sacrifice one for the good of many? 
People apply different moral norms to human and robot agents. In 2015 10th ACM/IEEE International 
Conference on Human-Robot Interaction (HRI) (pp. 117—124). IEEE. 

McFarland, M. (2014). Elon Musk: ‘With artificial intelligence we are summoning the demon.’ - The Washington 
Post. Retrieved May 19, 2021, from 
https://www.washingtonpost.com/news/innovations/wp/2014/10/24/elon-musk-with-artificial-intelligence- 
we-are-summoning-the-demon/?utm_term=.02d648908751 

Meehl, P. E. (1954). Clinical versus statistical prediction: A theoretical analysis and a review of the evidence. 

Minneapolis, MN: University of Minnesota Press. 

Morewedge, C. K., & Kahneman, D. (2010). Associative processes in intuitive judgment. Trends in Cognitive 

Sciences, 14(10), 435-440. 

Mori, M. (1970). Bukimi no tani [the uncanny valley]. Energy, 7(4), 33-35. 


Nisbett, R. E., & Wilson, T. D. (1977). Telling more than we can know: Verbal reports on mental processes. 


Psychological Review, 84(3), 231. 

Niszczota, P., & Kaszás, D. (2020). Robo-investment aversion. PLoS ONE, 15(9), e0239277. 

Oliveira, H. G. (2017, September). A survey on intelligent poetry generation: Languages, features, techniques, 
reutilisation and evaluation. In Proceedings of the 10th international conference on natural language 
generation (pp. 11-20). 

O’Neil, C. (2017). Weapons of math destruction: How big data increases inequality and threatens democracy. New 
York: Broadway Books. 

Önkal, D., Goodwin, P., Thomson, M., Gönül, S., & Pollock, A. (2009). The relative influence of advice from human 
experts and statistical methods on forecast adjustments. Journal of Behavioral Decision Making, 22(4), 390- 
409. 

Otto, A. S., Clarkson, J. J., & Kardes, F. R. (2016). Decision sidestepping: How the motivation for closure prompts 
individuals to bypass decision making. Journal of Personality and Social Psychology, 111(1), 1-16. 
Palmeira, M., & Spassova, G. (2015). Consumer reactions to professionals who use decision aids. European Journal 

of Marketing, 49(3/4), 302-326. 

Parasuraman, R., & Riley, V. (1997). Humans and automation: Use, misuse, disuse, abuse. Human Factors, 39(2), 
230-253. 

Pew Research Center. (2019, January). Facebook algorithms and personal data (Research report). Pew Research 
Center. https://www.pewresearch.org/internet/20 19/0 1/16/facebook-algorithms-and-personal-data/ 

Pezzo, M. V., & Pezzo, S. P. (2006). Physician evaluation after medical errors: does having a computer decision aid 
help or hurt in hindsight?. Medical Decision Making, 26(1), 48-56. 

Prahl, A., & Van Swol, L. (2017). Understanding algorithm aversion: When is advice from automation discounted?. 
Journal of Forecasting, 36(6), 691-702. 

Promberger, M., & Baron, J. (2006). Do patients trust computers?. Journal of Behavioral Decision Making, 19(5), 
455—468. 

Reinecke, M. G., Wilks, M., & Bloom, P. (2021). Developmental changes in perceived moral standing of robots. In 
Proceedings of the Annual Meeting of the Cognitive Science Society (Vol. 43, No. 43). 

Roberts, S. (2017). Christopher strachey’s nineteen-fifties love machine - The New Yorker. Retrieved May 19, 2021, 
from https://www.newyorker.com/tech/elements/christopher-stracheys-nineteen-fifties-love-machine 

Senecal, S., & Nantel, J. (2004). The influence of online product recommendations on consumers’ online choices. 
Journal of Retailing, 80(2), 159-169. 

Shaffer, V. A., Probst, C. A., Merkle, E. C., Arkes, H. R., & Medow, M. A. (2013). Why do patients derogate 
physicians who use a computer-based diagnostic support system?. Medical Decision Making, 33(1), 108— 
118. 

Shin, K. Y., Lee, J. K., Kang, K. H., Hong, W. G., & Han, C. H. (2019). The current applications and future directions 
of artificial intelligence for military logistics. Journal of Digital Contents Society, 20(12), 2433-2444. 

Silver, D., Hubert, T., Schrittwieser, J., Antonoglou, I., Lai, M., Guez, A., ... & Hassabis, D. (2017). Mastering chess 
and shogi by self-play with a general reinforcement learning algorithm. arXiv preprint arXiv: 1712.01815. 

Smith, A. (2018). “Public attitudes toward computer algorithms.” Pew Research Center. Retrieved May 19, 2021, 
from http://www.pewinternet.org/2018/11/16/public-attitudes-toward-computer-algorithms/ 

Soll, J. B., & Mannes, A. E. (2011). Judgmental aggregation strategies depend on whether the self is involved. 
International Journal of Forecasting, 27(1), 81—102. 

Starke, C., & Liinich, M. (2020). Artificial intelligence for political decision-making in the European Union: Effects 
on citizens’ perceptions of input, throughput, and output legitimacy. Data & Policy, 2, e16. 


Tetlock, P. E. (2009). Expert political judgment. How good is it? How can we know? Princeton: Princeton University 


Press. 

Turner, J. C., Hogg, M. A., Oakes, P. J., Reicher, S. D., & Wetherell, M. (1987). Rediscovering the social group: A 
self-categorization theory. Oxford, UK: Blackwell. 

van den Berg, J., Patil, S., & Alterovitz, R. (2017). Motion planning under uncertainty using differential dynamic 
programming in belief space. In H. I. Christensen & O. Khatib (Eds.), Robotics Research: The 15th 
International Symposium ISRR (pp. 473—490). Cham: Springer International Publishing. 

Van Swol, L. M. (2009). The effects of confidence and advisor motives on advice utilization. Communication 
Research, 36(6), 857-873. 

Voiklis, J., Kim, B., Cusimano, C., & Malle, B. F. (2016, August). Moral judgments of human vs. robot agents. In 
2016 25th IEEE International Symposium on Robot and Human Interactive Communication (RO-MAN) (pp. 
775-780). IEEE. 

Waytz, A., Cacioppo, J., & Epley, N. (2010). Who sees human? The stability and importance of individual differences 
in anthropomorphism. Perspectives on Psychological Science, 5(3), 219-232. 

Waytz, A., Heafner, J., & Epley, N. (2014). The mind in the machine: Anthropomorphism increases trust in an 
autonomous vehicle. Journal of Experimental Social Psychology, 52, 113-117. 

Yeomans, M., Shah, A., Mullainathan, S., & Kleinberg, J. (2019). Making sense of recommendations. Journal of 
Behavioral Decision Making, 32(4), 403-414. 

Zajonc, R. B. (1968). Attitudinal effects of mere exposure. Journal of Personality and Social Psychology, 9(2p2), 1. 

Złotowski, J., Yogeeswaran, K., & Bartneck, C. (2017). Can we control it? Autonomous robots threaten human 
identity, uniqueness, safety, and resources. International Journal of Human-Computer Studies, 100, 48—54. 

Zuckerman, G. (2019). The man who solved the market: how Jim Simons launched the quant revolution. London: 


Penguin Random House. 


A three-dimensional motivation model of algorithm aversion 


ZAHNG Yuyan!, XU Liying?, YU Feng!, DING Xiaojun*, WU Jiahua?, ZHAO Liang? 
(+ Department of Psychology, School of Philosophy, Wuhan University, Wuhan 430072, China) 
C Department of Psychology, School of Social Sciences, Tsinghua University, Beijing 100084, China) 
C Department of Philosophy, School of Humanities and Social Science, Xi'an Jiaotong University) 


(4 Department of Publishing Science, School of Information Management, Wuhan University, Wuhan 430072, China) 


Abstract: Algorithm aversion refers to the phenomenon of people preferring human decisions but 
being reluctant to use superior algorithm decisions. The three-dimensional motivational model of 
algorithm aversion summarizes the three main reasons: the doubt of algorithm agents, the lack of 
moral standing, and the annihilation of human uniqueness, corresponding to the three psychological 
motivations, i.e., trust, responsibility, and control, respectively. Given these motivations of 
algorithm aversion, increasing human trust in algorithms, strengthening algorithm agents’ 
responsibility, and exploring personalized algorithms to salient human control over algorithms 
should be feasible options to weaken algorithm aversion. Future research could further explore the 
boundary conditions and other possible motivations of algorithm aversion from a more social 


perspective. 
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